河北省重点文物保护单位。位于峰峰矿区寺后坡村。因其规模比南北响堂寺小而得名“小响堂”。
分石窟和寺院两部分。东侧为水浴寺废址，窟前坡下有宋代经幢两座。石窟及摩崖造像均凿于寺院的西侧东西走向的一处低矮的石灰岩山崖壁上，总长22米，有东西两座石窟，摩崖造像两处，大小佛龛二十个。西窟座北朝南，始凿于北齐武平五年十月，之后唐、宋各代均有续凿。东窟凿于北宋初年。
峰峰邮政局开发的《响堂山石窟艺术》拜年企业金卡第4枚（编号09-130406-13-0005-004）和“水浴寺石窟”风景日戳（2010年6月12日启用），均展示了水浴寺石窟第一窟前壁左侧僧俗礼佛图（局部）。